ест" ие как ные с 


ними справились ^ 


Михаил Жилин, Розюгез Ргоеззопа! 


/ 


ИЯ ++ 
Ир (нь) НЕНГоаа "* 
И | 2022 


] 
] 


№ | 


Немного о себе 


Михаил Жилин 


® Инженер производительности 
® Контрибьютор в Ореп Зоугсе- 
проекты 


Т@едгат: @'тихпка 
е-тай: 
ширкКа@дтай.сот 


РозфагезРго (но) НИНГоаа о 


О чём разговор? 


® О Роге о 

® О высоких нагрузках из реальной жизни 
® Об инструментах профилирования 

® О дефектах исправленных 

® И неисправленных... 


РобЗогезрго (но) ННГоая "3 


[0] Профилирование 


е Ре| 

е НатеСгарп 

е От Оо9оу@РССопт. Е П’22 
Ю{р$://оН.у/З@ар1 об 


ое Рго 


м НЕНГоаа** 
Ра 


[0] Профилирование 


е Быстрый вариант 

. ре!юр 
е Шпаргалка 

. рейгесога -Е 99 -а -д --са|-дгарп=а\май зеер 2 

» рей эсиру --Пеааег --Не4$ 

сотт, ра На Ите, еиепыр, зут, 50 

е Требует установки дебиатю для Роз®югез ОЕ 
е Гребует реп-сборку с ПБипмлпа (проблема с КНЕ!-базеа) 


они Рго (но) = он 5 


[1] Снимки в МУСС 


| Ехесвуа|РапоЕхргРивае —— 

_ роз сай вавег = 

. Се гапзасноппарзНо! И 
ехес тв о 

о ехес_ема! зипр/е_ехрг | ое о 

ехес_ зак о 

о || и 
® Пример простого выражения В схес вар о 
‘бе!бпарвораа о 

|Еииении 


е (<=р912) Любое ррч$4|-выражение 
требует снимка 


РобЗогезрго (но) НИГоая у: 


[1] Снимки в МУСС 


е ГгапзасНоп |зо1а{оп 
® Пр5://ммим.роз1агеза!.ога/Аосз/ситет/ипсНоп$-шпюЮ.Р {| 
е рад ситет зпарзПо(к) -> хтт:хтах:х!р_ 15$ 
® Частота вызова: КеадаСоттщЩеа уз КереааеКеача 
® Сложность вычисления 
® Все подключения (до РС 14) или активные транзакции 
(14+) 
е Гребует К\//-блокировок 


о Рго (но) -х- ны 7 


[1] Снимки в МУСС 


® Используйте свежие версии Розюгез ОЕ (14+) 
. (<=рд912) Любое р!ра$41-выражение требует 
с@Зпарзпо аа 
. (<=рд13) Тормозит при большом числе 4е соппесйоп$ 
® Уменьшать число вызовов, к примеру, КереааеКеач 


ое Рго (но) ННГоая у: 


[2] Подтранзакции 


® Читающие транзакции начинают тормозить 
® Представление ра_$аЁ асмпу 
е ЗиШгапзСопгооск+зиЫгап$ или ЗиБгап$ ЕК ОЁоск 
е зауерош{ или {гу-сасп 
® Подтранзакция = обычная транзакция + рагегЁ ХО 
® Усложняется проверка статуса подтранзакции 


они Рго (но) ННГоая “9 


[2] Подтранзакции 


® РгосАггау: 64 подтранзакции на 1 подключение 

е ра зи Бгапз: хранит ХО родительской транзакции (до 
спескрошпга) 

е Э-КУ: 32 буфера по ЗК В = 65536 подтранзакций 

® Домашнее задание: загляните в ра_зигап$, сколько там 
файлов 


Ро огез Рго (но а 


[2] Подтранзакции 


е Проблемы 

е |О: небольшой размер ЕКО 

е СРО: линейный поиск по ЭЗЕКО 
е Такая же проблема у остальных 5ЕКО-кэшей 
е Проседание 

. ОТ нескольких %-ов до 10 раз 


они Рго (но) внЕоач 1 


[2] Подтранзакции 


е \\огкагоипа 

е постараться не превышать 64 подтранзакций 
® ПНр5://сотт е$1.ро3{9геза1.0га/38/2627/ 

е® Май 2020: Андрей Бородин 

е Лето 2022: Иван Лазарев и Юрий Соколов 
е Зги рБиНегз_зхе зсае + оптимизации поиска 
© 


Ю(рз://млмм/.роз1агеза!.ога/теззаае-а/Ла/2ВЕС2ВЗЕ- 
9В61-4С10-9ЕВ5-5РАВОРО5ЕЕ8 6 @уапаех-еат.ги 


Я Рго (но) НЕЙ --: 2 


[3] Кэш системного каталога 


е Долгое планирование 1оаа вре РЕ НЕРНЕСНЕРЕЕЕЯ 
9 $Торреа, 9 готбте 
е рад Ча Заетепт$ ).1 ма, 0.0 №1, 0.9 $1, 0.0 5+1 
= — 304 изеа, 19989072+Би++/саспе 
. ВМО 308 изед. 49603376 ауа11 Мет 
е Метаданные + Статистика = Ри %мЕм ТТМЕ+ СОММАМО 
Убьй: 151 0:00.38 роз+2ге$: (21047] ВТМО 
базы 65.0 0.5 0:00.14 роз{ргез: (21449}] ВТМО 
60.0 0.9 0:00.19 роз{ргез: (21391] ВТМО 
е Сохраняется в кэше 60.0 0.5 0:00.12 роз+ргез: (21459 Ее 
60.0 0.5 0:00.12 роз{регез: (21461) 1а1е 
процесса подключения 55.0 0.5 0:00.13 роз%егез: (21421) ВТМО 
55.0 0.5 0:00.14 роз{егез: (21431) ВТМО 


Я Рго (но) > ии Е 


[3] Кэш системного каталога 


» Инвалидация кэша _| |9 пех дебтехе $1юё = 
Глобальная и потабличная 
е ООЕ-и чКу-команды 
е Оп соттЁ рассылает всем 
процессам в виде сообщений 


РобЗогезрго (ны > арт 


[3] Кэш системного каталога 


е Сообщения 
 Циклический буфер из 4096 элементов 
е Обработка при приёме запроса, открытие релейшена 
ит.п. 
Кто не успел прочитать, тот идёт в гезЕ{ 


о Рго (но) внЕоач 5 


[3] Кэш системного каталога 


е Уменьшать частоту ООЁ-команд, которые вызывают 
инвалидации 
е Мониторить инвалидации с помощью рарго_ За: 


65 ://ро${агезрго.ги/4осз/ро{агезрго/1 З/рарго- 
3аз#РОРНО-$ТАТЗ-!М\УАЕ-М$а5 


ро Рго (но) внЕоач 6 


[3] Кэш системного каталога 


е Тогсе рага!е! тоае 
аебиа_41зсага_саспез$ 


® ПНр5://роагезрго.ги/Аос$/ро{агезрго/15 


Гипите-сопйа-аеуеорег#СУС-ЕОВСЕ- 
РАВАСЕТ-МООЕ 


РобЗогезрго (но) > ии 7 


[4] СРУ-утилизация в Кегпе| Зрасе 


» $$ >= изег 


1.3 34а, 0.1 ча, 0.5 ВЕ, 0.7 з1, 
54149. 1638.0 Егее, 26121.5 азеа, 36390.2 БаЕЕ/с 
4096.0 сота1, 1106.3 Егее, 2989.7 изеа. 19980.8 ата11 № 


е Никаких других 


4:35.96 розсагез 
46:30.836 ро 


20.05 


2961779 розтатез 16.34 582696 546816 
2771243 розтагез 16.34 13.349 13.29 
2806845 розтагез 16.343 2.03 2.03 
2816059 розсагев 16.34 12.49 12.49 
2953995 розтагез 16.34 360120 324068 
1840331 ровтатгез 16.34 15.99 15.84 
2976262 розтагевз 16.39 73848 69408 
2250607 розсагев 16.39 15.99 15.89 

85227 розсагевз 16,39 1.59 1.59 

891630 розтагев 16,39 612196 576196 


9 (НЕ) Нньова"" 


18 


ТОПОВЫХ 3005065 ровтиев 20 16608 08 2236 0:02.23 песзтас 
3661 розсагез 153896 8324 5640 7 1015:38 розсатгез 
процессов, 2972903 розъагез 16.34 459372 423532 4 2:48.01 розеогез 
2715481 розтсагез 16.34 13.249 13.249 2 78:52.58 розсдтез 
кроме ро${9 гез Еее 16.34 478756 443504 2 :07.06 розедгез 
2 
9 
9 


о 


2 
3 
0:30.32 розедтез 
4:30.96 розсдагез 


2 


мимо 


. 


В 
В 
В 
В 
В 
В 
5 
5 
5 
р 
В 
К 
В 
р 
$ 


ооо попоочн-н-н--ом 


[4] СРУ-утилизация в Кегпе!| Зрасе 


е ре| юр 


е [Кегпе! аиои * 


е Отключаем 


ацансн -е 0 


Кегпе1] 
({Кегпе1] 
(Кегпе1] 
[Кегпе1] 
ровсдкев 
{Кегпе1] 
розсдхев 
(Кехпе1] 
(Кехпе1] 
розсдхевз 
розсдхев 
1366-2.28.з0 
(Кехпе\] 
розодхез 
[Кегпе: ] 
[Кегпе:.) 
розодхез 
розъдхез 
(хехле\ ] 
розъдхез 
[Кегпе1 ] 
розъдхез 
розхдхез 
розздгез 


дес ша ехе_111е 
Фоце шапу 
21945 ехе сопраге 
_хам_зраа_1лоск 


-\ Тлеак злъазлЬ 14+ь лек +1 
- — — 


ги1е. сойзергор.21 


са11.сопзтргор.17 


Веар_ Вос зеагсь БаЕЁег 

_ пепмоче_аух_ипа11дщеЯ егиз 
_хам_эрза мп1осКк 1хчгезсоге 
0х0000000000351566 

дес _сазк ехе_#11е 

зимар_ расе_хапсе 
Веардетраде 
0х0000000000372аа6 
ужхпес3_с4_хи4с.1эга.63 

_Б= сопраге 

{3115 сазк_эм1ссь 
бесзпарзвосраса 
0х0000000000372а33 
ТИТосКВе1еазе 


® 


[4] СРУ-утилизация в Кеге!| Зрасе 


о 


160 гоо$х 
039245 гоо$ 
41503 ровссгев 
4 ровсатев 
80 ровсагев 
5 ровтатев 


Г 
ю <® © 
. # . „ . 
ГИ - И-М Г - М 


РУ" 


сор - 18:56:45 эр 2 4.45, 4 пцвегз, 1о0а4 ауегаде; 11.31, 
Тазкз: 168 оса : пп 1675 з1еер1п9, 0 зторреа, 
30 минут спустя \Сра (3) 0.0 11, 57.7 а, 12.8 ма, 0.6 ва, 
МВ Мею - ъоса1, 543.3 Егее, 25292.7 изеая, 38313.7 
МВ 5чар 0.0 сота1, 0.0 Егее, 0.0 изеЯ. 18500.7 атаз 
е 5\у$ уменьшилось т = 
2751347 розсотгез о .8 
В 8 раз (87->1 0) 2917373 розтагез 0 Е 
3034048 розсатгез 0 5-4 
2816059 розтатез [9 к - 
2857240 розтсагез о = 
® Избыточные 2900147 розсатез 0 ы. 
. 2943744 розсатез 0 ` 
правила ацака 3022968 ровтагев 0 33 
0 
9 
о 
0 
0 
0 


р 
5 
В 
5 
5 
5 
В 
5 
5 
т 
В 
$ 
$ 
$ 


Я Рго 


[5] Нотоаа Обзегуаб\!ку бид 


е тах соппесйоп$ >= 1000 
® Поток простых запросов (ираае, заес{) 


зе1есе ма1*_еуеп{, зфафе, соип*(1) 
Тгот рд_$фаф_асф1у1фу 

умпеге БаскКепа_туре = 'с11епф БасКепа' 
ап $зТафе = ‘аст1уе' 

дгоир Бу ма1{_еуепт, зфате; 


\Ма1*_еуеп{ | эзфафе | соип* 
Е а +--------+------- 
С11епЕВеа | асф1уе | 5 
<пи11> | астауе |1 
РобЗогезрго 


г) Неньоаа** 
(нон ы 21 


[5] Нотоаа Обзегуаб\!ку бид 


е АП Е\УЕМТГ СИЕМТ_ВЕАО 
 Голько внутри зесиге геаа (часть бра) 
о ‘Мак ипи {Пе зоскЕ{ 1$ геаду” 
. Ждем нового запроса от клиента 


+ ©. зесиге геа {Рой *, мо *, $26 @) : 552е_( 
* ©: ра гесуби) : пе 
у ©. ра ебу : ие 
* ®: ЗоскеВаскепа (5 поаРо) : пе 
* ©: ВеаЯСогптапа( 5 полЮо) : пе 


> ое. РозогезМашт(те, саг * *, соп$Ё спаг*, сопзЁ сВаг *) : мо!а —н 
РобЗогезрго ны) мае, 


[5] Нотоаа Обзегуаб\!ку бид 


е Активный запрос (За{е = асНуе) 
. Выставляется в начале любого внутреннего действия 
е Снимается перед вызовом зесиге_геаа() 


» НЕ МОЖЕТ БЫТЬ АКТИВНЫХ ЗАПРОСОВ С 
ОЖИДАНИЕМ СНЕМТКЕАП! 


они Рго (но) НЕЙ грач Е 


[5] Нотоаа Обзегуаб\!ку бид 


е ВаскепаЗаи$Аггау 
‚ Зае, адцегу, |Р адагез$, {тезатрз 
е РгосАггау 
. Май еуещ 
е Информация собирается неодновременно 


е П(р5://Мммм/.ро${агеза!.ога/теззаае-/аб1с0а74-е789-5е15- 
1180-42708 асбте2а%40роз1агезрго.ги 


ро Рго (но) АвНЕоач д 


[6] паех-Оту 5сап 


е Быстрее, чем паех $сап 

е Индексы не хранят хтт/хтах 

е Нужно читать их из блока таблицы? 

е Есть оптимизация — карта видимости 


Ю{р5://ро${агезрго.ги/4ос$/ро{агезрго/1 5Лпаехез-таех- 


опу-5сап$ 


Я Рго 


(н5) ННоаа** 
"> 25 


[6] паех-Оту 5сап 


е 2 бита му тар на 1 блок таблицы 

е 1 блок МУЮНу тар соответствует 256МВ таблицы 

е |паех-Оту 5сап одномоментно умеет работать только с 
одним блоком му тар 

® Научить работать шаех-Оту $сап с большим числом 
блоком \/М 


В р$://млмм.роз1агеза!.ога/теззаае- 
/Нау/87рп08оа$1.15!9%40агз-Ишкраа 


Ро огез Рго (но Иа, 6 


[6] паех-Оту 5сап 


Бегоге=# ехр]а1п апа1узе зе1есф * Тгомт тез{ огаег Бу 14; 


ОЧЕКУ РЕАМ 
Тпдех Оп1у З$сап ч$1пд те$1_14х оп тез+ 
(соз{=0.56..1533125.37 гомз=59013120 м1а{Н=8) (асфчца1 
{1те=0.080..16211.427 гом$=59013120 1оорз$=1) 
Неар РГетспез: @ 

Р]апп1пд Т1ме: 90.115 т$ 

Ехеси{1оп Т1ме: 18294.049 т$ 

(4 гом$) 


Ро огез Рго (но ат, 7 


[6] паех-Оту 5сап 


аТтег=# ехр1а1п апа1узе зе1ест * Тгот фезт огаег Бу 19; 


ОЧЕКУ РЕАМ 
Тпдех Оп1у $сап ич$1пд те$1_14х оп тез+ 
(соз{=0.56..1533125.37 гомз=59013120 м1А{Н=8) (асфчца1 
{1те=0.056..7522.781 гом$=59013120 1оорз$=1) 
Неар РЕетспез: @ 

Р]апп1пд Т1ме: 90.076 т$ 

Ехеси{1оп Т1ме: 9501.317 м$ 

(4 гом$) 


Ро огез Рго (но а, 8 


[7] паех эсап в Ме фе оор’е 


® |паех Зсап во внешней части Мез{еаГоор 
® Допустим, есть маленькая таблица и индекс 


зефт епаб1е_ПазИ)ол1п = о{Ё; 
Зет епаб1е_мегде]о1лт = отт; 
зеф могк_тет = 1900009090900; 


зе1есф т_зта1].уа1ие 

Тгот +_$та11, депегатхе_зег1ез(1, 5000000) 1 
мпеге +_$та11.14 = 1 + 19900 

]11т1* 10; 


они Рго 


г) нЕньоаа** 
(Но мимеа 29 


[7] паех $сап 


-> Мезтед Гоор (соз{=0.14..887512.00 гомз=500000 
мтаен= -. (асфиа1 +1те=2256.209..2256.210 гомз=0 Тоорз=1) 
`-> Тпадех $сап ии _зта11_рК_оп 1_$та11 
(со$1=0.14..0.16 гомз=1 мта* ке о 
{1те=0.909..9.900 гом$=0 1оор$=5 00000) 
Тпдех Сопа: (14 = (1.1 + 1000) ) 
ВиЁТегз: зНагед Н1*=5000000 


Р]апп1пд Т1ме: 0.197 т 
Ехеси*10п Т1те: 2288. 133 т$ 


они Рго (но) Иач 0 


[7] паех $сап 


Время 1 запроса (5М таех $сап$) 
35000 


—\Ш— |аепсу 


миллисекунды 
Е 


РозфогезРго Е (но) = 1 


[7] паех $сап 


3000 — | 
2500 - а 
2000 —- ] 
150 № Ш 
о м _ _ м м м м юм в ый 
123 4 65 6 Т 8 


9 10 


5сапз рег тзес 


Роб огез Рго сИеги5 не нЕоач 2 


В заключение 


е® РозогезоОЕ растет 
® и функционально 
® и по скорости 

® Жизнь ре{огтапсе-инженера 
интересна и познавательна 

е АГуои пеечд 1$ РоЗ{огез 


они Рго (но) НЕЙ Грач Е 


Михаил Жилин 


Теедгат: 7’ 

| | @тинка /Д 

Е-тай: 
т.хПИтп@ро${огезрго.ги 


/ 


7 (НЕ) Неноаа" 


И 


/ 


